변협, AI로 시험 출제 파문…수험생·교수들·공정성 의문
가주변호사협회는 지난 2월 실시된 변호사 시험에서 일부 객관식 문항이 인공지능(AI)을 활용해 제작됐다고 밝혀 논란이다. 협회측은 점수 조정안을 주 대법원에 제출할 예정이라고 밝혔다. LA타임스에 따르면 전체 171문항 중 100문항은 시험 준비 전문업체인 카플란(Kaplan)이 제작했으며, 48문항은 1학년 법학시험에서 재활용됐다. 나머지 23문항은 시험 문항의 타당성과 신뢰도를 평가하는 업체인 ACS벤처스가 AI를 활용해 제작했다. 수험생과 법학계 인사들은 법률 비전문가가 만든 AI 문항의 질과 공정성에 의문을 제기하며, 변호사시험의 신뢰도가 근본적으로 훼손됐다고 비판하고 있다. UC어바인과 샌프란시스코대 교수진은 문항을 만든 업체가 그 타당성과 신뢰도까지 직접 평가한 점을 지적하며, 공정성을 해칠 수 있는 구조적 문제라고 주장했다. 이에 대해 협회는 모든 문항이 시험 전 전문가 패널의 검토를 거쳤고, 전체 객관식 문항의 신뢰도 지표가 기준치(0.80)를 충분히 초과했다고 반박했다. 캘리포니아 대법원은 협회의 보도자료 발표 전까지 AI가 문항 제작에 사용된 사실을 알지 못했다고 밝혀, 감독 부재 논란도 불거졌다. 협회는 지난해 2200만 달러 규모의 예산 적자를 이유로 기존 NCBE 시험을 폐기하고, 카플란 및 미저러러닝과 계약을 체결해 자체 시험 체제로 전환한 바 있다. AI 및 재활용 문항 사용 사실이 사전에 고지되지 않은 점도 논란이 됐으며, 법학계에서는 최소 2년 전에 공지가 이뤄졌어야 한다는 지적이 나왔다. 한편,협회는 내달 5일 열리는 변호사시험위원회 회의에서 점수 조정 및 후속 조치 방안을 논의할 예정이다. 정윤재 기자수험생 공정성 변호사시험위원회 회의 시험 문항 공정성 의문